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Abstract of WO9507055 

Computer-assisted microsurgery equipment, of 
the type including an articulated tool support, with 
one of the ends being integral with a fixed 
reference system Rc. The system comprises 
means for determining the tool coordinates in 
said fixed reference system Rc, and an Image 
data base wherein are recorded images from an 
imaging system in the image reference system 
Ri. The invention is characterized by having at 
lest two sensors integral with the fixed reference 
system Rc supplying an electrical signal 
depending on the patient reference position Rp in 
the fixed reference system Rc, and a computer 
for matching the tool reference system Ro with 
the patient reference system Rp and the image 
reference system Ri according to data from the 
bidimensional sensor, means for determining the 
coordinates of the tool in the fixed reference 
system Rc and data from the image base. The 
computer supplies a signal for displaying the 
position of the tool in the image reference system 
Ri on a monitor and for controlling the position 
and shifting of said tool as a function of the 
control signals from the control unit. 
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(54) Titre: INSTALLATION POUR OPERATION DE MICROCHIRURGIE ASSISTEE PAR ORDINATEUR ET PROCEDES MIS EN 
CEUVRE PAR LADITE INSTALLATION 

(57) Abstract 

Computer- assisted micro surg ery equipment, of the type including an 
articulated tool support, with one of the ends being integral with a fixed reference 
system Rc. The system comprises means for detennining the tool coordinates 
in said fixed reference system Rc and an Image data base wherein are recorded 
images from an imaging system in the image reference system Ri. The invention is 
characterized by having at lest two sensors integral with the fixed reference system 
Rc supplying an electrical signal depending on the patient reference position Rp 
in the fixed reference system R* and a computer for matching the tool reference 
system Ro with the patient reference system Rp and the image reference system 
Ri according to data from the tridimensional sensor, means for detennining the 
coordinates of the tool in the fixed reference system Rc and data from the image 
base. The computer supplies a signal for displaying the position of the tool in 
the image reference system Ri on a monitor and for controlling the position and 
shifting of said tool as a function of the control signals from the control unit 

(57) Abrege* 

La prfsente invention conceme une installation pour operation de mi- 
crochirurgie assistee par ordinateur, du type comportant un support d'outils ar- 
ticu!6 dont Tune des extremites est solidaire d'un referentiel fixe Rc, ledit systeme 
comportant des moyens pour terminer les coordonnecs de I'outil dans ledit 
referentiel fixe Rc, ainsi qu'une base de donnees Image dans laquelle sont enreg- 
istrees les images provenant d'un systeme d'imagerie dans le referentiel de 1' image Ri, caractense en ce qu'il comporte au moins deux 
capteurs soHdaires du referentiel fixe Rc delivrant un signal electrique fonction de la position du referentiel du patient Rp dans le referentiel 
fixe Rc, et un calculateur pour la mise en correspondance du leTerentiel de I'outil Ro avec le referentiel du patient Rp et le referentiel de 
T image Ri en fonction des informations provenant du capteur bidimensionnel, des moyens pour determiner les coordonnecs de I'outil dans 
ledit referentiel fixe Rc et des informations provenant de la base d'images, ledit calculateur delivrant un signal pour la visualisation de la 
position de I'outil dans le referentiel de I' image Ri sur un ecran de contrdle, et pour commander la position et les emplacements de i'outil 
en fonction de signaux de commande provenant d'un boitier de contrdle. 
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INSTALLATION POUR OPERATION DE MICROCHIRURGIE 
ASSIST^ PAR ORDINATEUR ET PROOFS MIS EN OEUVRE 
PAR LADITE INSTALLATION. 

La presente invention concerne une 
installation pour operation de microchirurgie 
stereotaxique assistee par ordinateur. 

ETRT DE LA TECHNIQUE 
On connalt dans l f etat de la technique de 
telles installations. A titre d'exemple, le brevet 
frangais FR2 651670 decrit un procede de localisation 
precise d'une lesion et dispositif pour la mise en 
oeuvre de ce procede. 

L 1 invention concerne un dispositif et un 
procede de localisation precise d'une lesion. Le procede 
selon 1' invent ion est caract&rise en ce qu'on immobilise 
l f organe a examiner dans la meme position que celle de 
la biopsie a pratiquer, on effectue des coupes axiales 
(XY) tomodensitometriques de l'organe a travers au moins 
un rectangle transparent muni de trois fils opaques 
concourants non symetriques occupant des positions 
determinees par rapport & 1 'appareillage de biopsie, on 
mesure les longueurs des deux segments (AB, AC) 
interceptes par lesdits fils opaques pour une coupe 
lesionnelle choisie/ on effectue au moins un cliche en 
position de prelevement, on reconstruit sur ledit clich6 
la trace des trois fils opaques, et on reporte sur ledit 
cliche les longueurs des segments (AB, AC) mesures pour 
determiner la ligne de base lesionnelle correspondant a 
la coupe lesionnelle choisie. 

La mise en oeuvre de ce procede implique une 
immobilisation parfaite du patient. 

Un autre brevet franpais publie sous le 
num6ro FR2 6864 99 decrit un appareil de traitement d'une 
cible, telle qu f une lesion a I'interieur du corps 
utilisant un element marqueur implant^ dans ou au 



WO 95/07055 



2 



PCT/FR94/01050 



voisinage de la cible pour piloter la therapie de ladite 
cible. Cet appareil de therapie comprend: 

- des moyens de therapie de la lesion, 

- des moyens de reperage de la lesion, les 
moyens de reperage 6tant lies, par exemple mecaniquement 
ou electriquement, aux moyens de therapie 

- des moyens de calcul de la position de la 
lesion relativement aux moyens de therapie a l'aide des 
moyens de reperage 

- des moyens d 1 activation des moyens de 

therapie . 

Les moyens de reperage realisent le reperage 
d'au moins un element marqueur implante a l'interieur de 
la lesion. Les moyens de calcul calculent les 
coordonnees de position de 1* element marqueur (MO, Ml, 
M2, M3) par rapport aux moyens de therapie qui sont 
utilises pour positionner les moyens de therapie mobiles 
dans l f espace dans une position quelconque selon les 
axes X, Y, z. Cet appareil permet de realiser une 
therapie precise de la lesion. 

Un tel appareil necessite, pour sa mise en 
oeuvre, une preparation pre-chirurgicale lourde. 

Le brevet frangais FR2682778 decrit un 
microscope pour operation de microchirurgie 
ster£otaxique assistee par ordinateur, et un procede 
pour son f onctionnement . Ce microscope comporte des 
detecteurs detectant des donnees optiques, un systeme 
d 1 identification de position et un dispositif de 
commande de processus dvaluant les signaux dudit 
systeme. Ce systeme est un systeme a base optique 
integre dans le systeme optique du microscope et il est 
prevu un dispositif qui convertit les signaux delivres 
par le dispositif en une representation graphique 
bidimensionnelle . 

Un autre brevet de I'art anterieur, le 
brevet PCT/FR090/00714, divulgue une installation dans 
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laquelle le r§f6rentiel principal est li6 au lit du 
patient. Le patient est immobilis6 par rapport au lit 
par un casque de maintien ou un moyen equivalent. Ce 
document de l'art anterieur Expose que le systeme 
comporte des moyens notes 2, de mise en position liee, 
par rapport au referentiel R2 des structures SNH et SR. 
A titre d f exemple f la tete est fixee sur une table 
d' operation. 

Cette solution n'est pas totalement 
satisfaisante car les moyens de maintien reduisent les 
voies d'acces possibles, et imposent des contraintes 
genantes au chirurgien, qui doit considerer que la 
position du patient est definitive a partir du debut de 
1 1 intervention . 

De plus, le lit operatoire ne presente 
jamais une rigidite mecanique absolue, et la correlation 
entre le patient et les images virtuelles ne presente 
pas un degre de precision suffisant pour certaines 
interventions . 

Le brevet WO92/06644 decrit une installation 
de radiotherapie comportant des moyens de mise en 
concordance des sources de rayonnement et des images 
obtenues prealablement . Ce document ne mentionne pas . la 
mise en oeuvre d'un referentiel correspondant au 
referentiel fixe de 1' invention de la demanderesse, qui 
n'est d'ailleurs pas necessaire compte tenu des 
applications envisagees dans ce document de l'art 
anterieur. 

QBJET DF1 LA PRESENTE INVENTION 
L'objet de la presente invention est de 
remedier & ces inconvenient s en proposant une 
installation d 'utilisation ergonomique, permettant de 
dissocier la phase d 1 acquisition d 1 image et la phase 
d 1 exploitation des images a des fins chirurgicales . 

Dans l'etat de la technique, les systemes 
d'acquisition d'images a des fins de diagnostiques, ne 
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necessitant pas une intervention lourde ou 
traumatisante, ne sont pas exploitables a des fins per- 
op§ratoires. En effet, l'imagerie per-operatoires 
necessite le recours a des techniques de stereotaxic 
contraignantes pour le patient et pour le personnel 
operatoire. Ces techniques comportent notamment une 
phase douloureuse d 1 implantation d'une structure 
mecanique en forme de cadre qui est indispensable afin 
d'acquerir les images par rapport a un referentiel fixe 
connu, de permettre une calibration satisf aisante des 
images, et d'assurer .1 ' immobilisation de la tete du 
patient, ou plus generalement de la zone operatoire, par 
rapport a un r§f6rentiel donne. 

Le but de 1* invention est d'assurer une 
correlation entre des images numeriques obtenues par un 
systeme d'imagerie medicale avec le patient de fagon a 
apporter au chirurgien des informations destinees a 
guider en temps reelle sa strategie operatoire. 
Certaines interventions necessitent une precision de la 
correlation de l'ordre du millimetre, voire inferieure 
au millimetre. 

Pour atteindre ce but, 1 1 installation selon 
l 1 invention comporte un referentiel absolu qui est le 
referentiel fixe Rr lie a une structure totalement 
independante du patient ou du systeme d'imagerie ou de 
visualisation. 

Un autre but de 1' invention est de permettre 
aux chirurgiens de proceder a 1 1 acquisition des images 
sur un patient non anesthesie et autonome, suivant une 
procedure simplifiee, a n'importe quel moment de 
1 'hospitalisation, voire dans un etablissement 
hospitaller different, et eventuellement recourir a 
plusieurs techniques d'imagerie complementaires . 

L' invention concerne plus particulierement 
une installation du type comportant un support d'outils 
articul6 dont l'une des extremites est solidaire d'un 
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referentiel fixe R c , ledit systeme comportant des moyens 
pour determiner les coordonnees (position d'un point et 
orientation d f un vecteur directeur) de l'outil dans 
ledit referentiel fixe R c , ainsi qu'une base de donnees 
Images dans laquelle sont enregistrees les images 
provenant d'un systeme d'imagerie dans le referentiel de 
l 1 image Ri . L ■ installation selon 1' invention comporte au 
moins deux capteurs solidaires du referentiel fixe R c 
delivrant un signal electrique fonction de la position 
du referentiel du patient R p dans le referentiel fixe 
Rcf et un calculateur pour la mise en correspondance du 
referentiel de l'outil R Q avec le referentiel du patient 
Rp et le referentiel de 1* image Ri en fonction des 
informations provenant dudit capteur, des moyens pour 
determiner les coordonnees de l'outil dans ledit 
referentiel fixe R c et des informations provenant de la 
base d 1 images, ledit calculateur delivrant un signal 
pour la visualisation de la position de l'outil dans le 
referentiel de l f image Ri sur un ecran de controle f et 
pour commander la position et les deplacements de 
l'outil en fonction de signaux de commande provenant 
d'un boltier de controle. 

Une telle installation permet d'exploiter 
une ou plusieurs images acquises prealablement a 
1 ■ intervention, avant le transfert du patient en bloc 
chirurgical, et d'exploiter en temps reel les images en 
relation avec le deroulement de 1 ' intervention 
chirurgicale . 

Le referentiel fixe est un referentiel 
totalement independant est decouple tant du referentiel 
patient que du referentiel image, et du referentiel 
outil. Le referentiel fixe est un referentiel absolu et 
permanent. II est par exemple lie a un element de 
structure du bloc operatoire, par exemple le plafond, le 
sol ou un mur. Ce referentiel fixe est choisi de fapon a 
garantir une reference permanente et stable dans 



WO 95/07055 



6 



PCT/FR94/01050 



laquelle les differentes matrices de transformations 
peuvent etre calculees dans toutes les situations, en ne 
limitant ni les possibilites de deplacement du patient, 
ni les possibilites de deplacement de l'outil. 

Selon une premiere variante, les capteurs 
sont constitu£s par au moins deux cameras d 1 acquisition 
solidaires du referentiel fixe R c et disposees de fa^on 
a ce que leur champs d 1 observation contiennent la zone 
d 1 intervention chirurgicale . 

Avantageusement, les moyens pour determiner 
les coordonn6es de l'outil dans ledit referentiel fixe 
R c sont constitues par au moins deux cameras 
d'acquisition solidaires du referentiel fixe R c et 
disposees de fa<?on a ce que leur champs d 1 observation 
contiennent l'espace de mobilite de l'outil. 

Selon un mode de realisation prefere, 
1 1 installation comporte un triedre geometriquement 
defini, presentant au moins quatre sources lumineuses. 
ponctuelles non coplanaires solidaire du porte-outil, 
l'espace de mobilite dudit triedre etant contenu dans le 
champs de vision des cameras d 1 acquisition . 

Avantageusement 1 1 installation comporte en 
outre un triedre geometriquement defini, presentant au 
moins quatre sources lumineuses ponctuelles non 
coplanaires solidaire du patient, l'espace de mobilite 
dudit triedre etant contenu dans le champs de vision des 
cameras d 1 acquisition . 

L' invention sera mieux comprise a la lecture 
de la description qui suit, faisant reference aux 
dessins annexes ou: 

- La figure 1 represente une vue schematique 
de 1' installation. 

L ' installation selon 1' invention comporte: 

- un support articule (1) ; 

- une platine porte-outil (2) ; 

- un ensemble de trois cameras (3, 4, 5) ; 
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- des triedres de reference (21, 31) ; 

- un calculateur (8) ; 

- un dispositif de stockage d' images 
numerisees (9) ; 

5 - un ecran de visualisation (10) . 

Le support articule (1) comport e une base 
(11) solidaire du referentiel fixe R c qui est par 
exemple le plafond de la salle d' operation. 

Le support articul<§ (1) est constitue dans 

10 1' exemple decrit par un systeme de type "trois axes 

delta parallele". II comprend une premiere serie de 
trois bras (12, 13, 14) relies a la base (11) par des 
moteurs (15) commandes ind6pendamment . La premiere serie 
de trois bras (12, 13, 14) est raccordee a une deuxieme 

15 serie de bras (17, 18, 19) par des rotules (16) . Les 

extr^mites des bras (17 a 19) sont solidaires d'une 
embase (20) par 1 1 intermediaire d'axes de rotation. Les 
bras sont ecartes deux a deux de 120 degres dans un plan 
parallele a la base (11) . 

20 L'extremite des bras (17 a 19) est relie a 

un mecanisme (20) comportant 3 axes de rotation 
perpendiculaires deux & deux, l'extremite du dernier axe 
de rotation supportant une platine porte-outil (2) 
comportant des moyens d' accouplement d f un instrument 

25 chirurgical. 

Cette embase comporte par ailleurs un 
triedre (21) constitue par un assemblage de quatre 
points lumineux (22 a 25) , par exemple des diodes 
electroluminescentes, dont la disposition geomfetrique 

30 . est connue avec precision. 

Le deplacement de ce triedre (21) est acquis 
par 1 'ensemble de cameras (3, 4, 5) qui dfelivre un 
signal electrique permettant de calculer a tout moment 
la position du centre de gravite du triedre (21) et son 

35 orientation, dans le referentiel fixe R c , et done de 
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determiner la matrice de passage entre le referentiel 
fixe R c et le referentiel du porte-outil R 0 . 

Les diodes electroluminescentes sont selon 
un mode de mise en oeuvre alimehtees sequentiellement , 
la detection se faisant de maniere synchrone. 

Le patient (30) porte §galement un triedre 
(31) grace auquel I'ensemble de cameras (3, 4, 5) 
d£livre un signal electrique permettant de calculer a 
tout moment la position du centre de gravite du triedre 
(31) et son orientation, dans le referentiel fixe R c , et 
done de determiner la matrice de passage entre le 
referentiel fixe R c et le referentiel du patient Rp. 

On peut egalement realiser le triedre 
g£ometriquement defini sous forme d' implants mis en 
place sur le patient avant 1 'acquisition des images, et 
disposes en quatre points non align4s. Ces implants sont 
dans ce cas realises en un materiau permettant une 
detection par le ou les systemes d'imagerie mis en 
oeuvre. Les implants sont par exemple realises en 
titane . 

Le processus de mise en oeuvre de 
1 1 installation pour une intervention chirurgicale est le 
suivant : 

Le patient , apres une preparation, entre 
dans une premiere salle equipee de materiel 
d f acquisition des images. Dans cette salle, on procede 
de fagon connue a 1 1 instrumentation du patient, a 
1 'acquisition des images brutes et a la verification des 
images realisees. Les images sont numerisees et stockees 
dans une base de donnees images. Ces images sont ensuite 
exploitees a partir d'une station de travail, en 
l 1 absence du patient, par calibration et segmentation 
des images, indexation des images et programmation 
eventuelle des trajectoires et des strategies 
operatoires . 
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Le patient est ensuite transfere en salle 

d r operation. 

Dans la salle cooperation, on procede 
successivement : 

- a la preparation du patient 

- a 1 1 instrumentation du dispositif porte- 

outil / 

- a 1 1 installation du patient, conservant 
1 1 ins trumentation mise en place dans la phase 
d' acquisition d' images ; 

- a 1 1 instrumentation complementaire du 
patient ; 

- a la mise en correspondance des differents 
r&ferentiels ; 

- a 1 T intervention chirurgicale et a 
1 'enregistrement des* images operatoires. 

L 1 instrumentation complementaire sera seule 
visible en cours d ' intervent ion chirurgicale, 
1 ■ instrumentation initiale posee pendant la phase 
d'imagerie etant cachee sous les draps ou les champs. 

Le patient est ensuite transfere hors de la 
salle operatoire, pendant que les images operatoires 
sont exploitees sur une station de travail. 

Le processus d f acquisition des images par le 
systeme d'imagerie consiste plus particulierement a : 

- raser le patient, si on prevoit de lui 
instrumenter la tete ; 

- anesthesier eventuellement le patient 
avant le transport en salle d'imagerie ; 

- mettre en place le tri&dre (15) ou les 

implants ; 

- positionner le patient dans le systeme 

d'imagerie ; 

- proceder a 1 ' acquisition des images ; 

- verifier les images enregistrees dans la 
base d' images, notamment en ce qui concerne la 
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visibilite des reperes sur chacune des images 
enregistrees, de la definition, et des informations 
necessaires a 1 f intervention chirurgicale ulterieure ; 

- ressortir le patient. 

5 Les images sont acquises par tout moyen 

d'imagerie connu, par exemple IRM, angiographic, 
radiographic, tomodensitometrie, etc... Les images 
numerisees sont stockees dans une base de donnees 
eventuellement accessible par un reseau informatique a 
10 partir d'un site eloigne . 

Les images ainsi enregistrees sont traitees 
en vue de proceder a : 

- la calibration des images suivant les 
specifications de l'imageur mis en oeuvre ; 

15 - la segmentation des images en vue d'une 

exploitation 2D/3D ou 3D ; 

- l f indexage eventuel des points de reperes 
en vue de la mise en correspondance ; 

- le reperage des points caracteristiques 
20 des images contenues dans la base de donnees images, en 

vue de 1 1 exploitation pendant la phase operatoire, 
notamment par la recherche des cibles, des voies d'acces 
possibles et des trajectoires des instruments, et 
eventuellement par la simulation des differentes 

25 strategies en 2D ou 3D, et une memorisation des axes de 

progression ainsi experimentes . 

Apres cette etape de traitement des images 
et d 1 exploitation virtuelle de la base de donnees 
images, le patient est transfer^ dans la salle 

30 operatoire . 

Afin de permettre au chirurgien d f exploiter 
les informations prealablement acquises, il est 
necessaire de connaitre la position et 1 1 orientation 
relative de l'axe de l'outil par rapport aux images, 
35 dans le repere intermediaire correspondant a la zone 

d' intervention sur le patient. 
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A cet effet, l 1 invention permet la mise en 
correspondance des images acquises et liees au patient, 
avec l'outil. Le reperage doit s'effectuer quelle que 
soit la position de l ! outil et du patient. 

Le triedre (21) servant a reperer la 
position de l'outil est fixe de fa<?on amovible ou non 
sur la base du porte-outil. Le moyen de fixation sera de 
preference depourvu d ! articulation de fa<?on a garantir 
une permanence de la position du triedre (21) par 
rapport au support de l'outil. La solidarisation peut 
etre realisee par clipsage. 

Le reperage du patient peut etre realise de 
differentes f agons : soit par pose d f un triedre rigide 
normalise, soit par pose d' implants non alignes f soit 
encore par designation de points caracteristiques de la 
surface du patient, a proximite de la zone operatoire, 
avec un stylet de reperage. 

Cette derniere solution consiste a mettre en 
oeuvre un pointeur ■ (32) en forme de stylet f portant deux 
points de references detectables par le systeme de 
cameras, et permettant de designer, et done de memoriser 
la position de differents points caracteristiques du 
patient, dont il est possible de suivre les deplacements 
par reconnaissance de forme. Ces zones caracteristiques 
sont par exemple le nez, les coins des yeux ou le 
menton . 

Une telle sonde (32) comporte un corps en 
forme de stylet termine par une zone de pointage (35) , 
et comportant au moins deux points lumineux (33, 34) 
permettant de determiner la position et 1 'orientation de 
la sonde (32) par analyse des signaux delivres par les 
cameras (3, 4, 5) . 

La mise en concordance des referentiels sera 
exposee plus en detail dans ce qui suit . 

Pour la bonne comprehension, on designera . 

par : 
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- a P un point defini dans le repere R a ; 

- a Tb la matrice de transformation homogene 
(4 lignes, 4 colonnes) permettant d'exprimer dans le 
repere R a les coordonn^es d ! un point defini dans le 
repere R b , par la relation a P= a T b b P . 

Par ailleurs, les diff£rents repferes cites 

sont : 

R 0 Repere de l'outil ; 

Ri Repere de l 1 image ; 

R c Repere des cameras ; 

R pr Repere de la sonde ; 

R pg Repere grossier du patient ; 

R pc Repere corrige du patient ; 

R mi Repere geometrique defini par. au moins 4 
points non alignes (i variant de 1 a n) ; 

R ml Repere geometrique lie a l'outil ; 

R m2 Repere geometrique lie au patient . 

Par ailleurs, on notera P r S la surface 
definie par un ensemble de points Pj acquis dans le 
repere sonde R pr et i S la' surface definie par un ensemble 
de points Pj acquis dans le repere image Ri. 

Etape 1 : Mise en concordance £Hfc£g Is. 

repere image et le repere patient 

La premiere etape de la mise en concordance 
des referentiels consiste a calculer la matrice ir Tp/p C de 
passage entre le repere image et le repere patient. 

Selon un exemple de mise en oeuvre de 
1 1 installation, on utilise une sonde (32) afin de 
pointer des points remarquables connus dans le repere 
image Ri . Les coordonnees des extremites de la sonde 
(32) sont connues par construction, et par traitement 
des informations delivrees par les cameras (3, 4, 5) 
d§tectant les points lumineux (33, 34) portes par la 
sonde . 
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On peut ainsi exprimer les coordonnees de 
1' extremity (35) de la sonde (32) dans le repere de la 
camera par la relation : 

C Pextremite sonde = C T p r pr ^extremite sonde 

et done calculer la matrice de passage entre 
le referentiel de la camera et le referentiel de la 
sonde . 

On utilise par ailleurs des inserts ou un 
triedre (31) comportant dans I'un ou l f autre des cas 
quatre points non alignes identif iables par les cameras 
(3 a 5) f et d£finissant le repere R pc du patient. 

Ces points i Pj sont connus dans le repere 
image et sont mesures avec la sonde (32) , dans le 
repere sonde R pr dans leguel leurs coordonnees sont pr Pj. 
Lorsque 1 1 extremite de la sonde point sur l'un des 
points du triedre (31) ou sur l'un des inserts, on a une 
relation d'identite entre les deux coordonnees : 

pr Pj = pr P extremite sonde. 

La transformation i T pr est done determinee 
par une relation entre les points i Pj de la base de 
donn6es images et les points P c Pj mesures avec la sonde. 
On utilise le repdre interm£diaire R m2 fixe par principe 
d 1 utilisation, par rapport au repere R pc et on determine 
la matrice de transformation i T m2 - Cette matrice i T m2 est 
determinee par une relation entre les points i Pj de la 
base de donnees images et les points m2 Pj mesures avec la 
sonde . 

En effet, lorsque 1 'extremite de la sonde 
(32) pointe sur un point Pj f la relation suivante est 
v6rifi6e: 

m2 Pj^ 2 T c (t) c Tpr (t) P^P extremite sonde 

et on determine alors i T m 2 par la m§thode des 

moindres carr§s : 
n 

Min XI l( i Pj- l Trt2 ,n2 Pj) 2 l I avec n>j>4 
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Selon une variante de mise en oeuvre, on 
evite la pose d'un triedre (31) ou la pose d'inserts, en 
utilisant une methode de mise en correspondance 
surf acique . 

On procede pour cela a deux etapes 
cons^cutives : 

La premiere etape consiste a pointer 4 
points remarquables sur le patient (par exemple le nez, 
les yeux etc...). On se retrouve alors dans une 
situation analogue a la variante prec^dente, car on 
dispose de points Pj non coplanaires, dont les 
coordonnees i Pj sont connus dans le repere image Ri . La 
transformation i T pg est determinee par une relation entre 
les points *Pj de la base de donnees images et les points 
P9p. mesures avec la sonde (32) . 

On utilise comme prec6demment le repere 
intermediaire R^ fixe par rapport aux reperes R pg et R pc . 

On obtient alors une transformation 
"grossiere" ( i T m2 ) g qui permet d'obtenir une precision de 
l'ordre de quelques millimetres, insuffisante pour un 
usage clinique. 

La deuxieme etape consiste a definir un 
repere patient corrig& R pc en pointant une plurality de 
points remarquables se trouvant a proximite de la zone 
d 1 intervention, a l^ide de la sonde (32) . 

Cette operation permet de mettre en 
correspondance deux surfaces : 

• la surface reelle du patient, definie 
par 1 'acquisition faite avec la sonde P r S(P r Pj) avec 
n>j>4, la resolution §tant d'autant meilleure que n est 
grand ; 

• la surface i S li6e a l 1 image du patient 
la plus proche de la surface reelle definie dans le 
repere image, et utilisant la transformation grossiere 
( iT n>2)g ne selectionnant a cet effet qu'une partie de 
la banque de donnees images. P r S{P r Pj} avec n>j>4 
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On a alors la relation suivante: 

m2 P j. m2 T c (t) c T pr (t ) P r Pextr6mit6 sonde 
avec pr P ex tremite sonde= pr Pj 

et on determine alors i T m2 par la m^thode des 
moindres carres : 

Min 5)|(»S{Pj}- ^m2 m2 S{ m2 Pi}) 2 \ I avec n>j£4 

Etape 2 ; Mise en concordance entre — Is. 

repere outil fit le repere fixe 

L' etape suivante de la mise en concordance 
des referentiels consiste a calculer la matrice C T D de 

passage entre le repere outil et le repere fixe. 

• La transformation ml T 0 donnant la 
relation entre le repere outil R Q et le repere fixe Rmi 
est connu par construction. 

Les coordonnees d'un point °P dans le repere 
Ro peuvent etre exprimees dans le repere R m i par la 
relation : 

mlp = ml«p o op 

La transformation c T m i donnant la 
relation entre le repere fixe Rmi et le repere R c est 
connu en temps reel par mesure infrarouge. Les 
coordonnees d'un point ml P dans le repere R m i peuvent 
etre exprimees dans le repere R c par la relation : 
C P = c Tna(t) ml P 

Les coordonnees d f un point °P lie a 1' outil 
peuvent done etre exprimes en temps reel dans le repere 
fixe de mesure R c par la relation : 

C P - c Tmi (t) ml T 0 °P 

Le repere R D etant defini par le triedre 
(21), on obtient ainsi la relation en temps reel entre 
le repere outil R Q et le repere camera R c . 

Resolution d£js equations permettant cLe. 

caJcuW les matrices de transformation 

Le repere fixe R ml est defini par au moins 4 
points non coplanaires ^Pi a ml P4. 
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Les cameras (3 a 5) detectent ces quatre 
points dans le referent iel cameras, dans lequel leurs 
coordonnees sont c Pi a C P4. 

On cherche la relation c ?na telle que : 
c Pj= c T m i ml Pj , ou j = 1 a 4 
Theoriquement, I | c Pj - c T ro i ml Pj| | =0 
On cherche done c T m i qui minimise les 
erreurs, d'ou : 

4 

Minimum (£ I I ( c Pj - ^mi"^) 2 1 I ) 

Le minimum est determine par derivation. 
c T m i est une matrice 4x4 homogene avec 12 
element s remarquab le s 



CTml= 



Til 


T12 


Tl3 


T14 


Tn 


T 2 2 


T23 


T24 




J32 


.133 


?34 


0 


0 


0 


1 



On derive la relation 

4 

S = XI I < CP j * C Tmi ral Pj) I I 2 

5s _ 
5T(k,l) 

et on obtient un systeme de 3x4 - 12 
equations a 12 inconnues 

pour k = 1 a 3 : k etant I'indice de ligne 
pour 1 = 1 a 4, 1 etant I'indice de colonne 
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( CP j<P) "S C Tn,l«p,q) ml P j(q) ) 2 ] 



q=i 

p=i 



5s 

Comme =0, on en deduit les 

5T(k,l) 



relations suivantes 




3 



P =i q =1 
j-1 



et 



4 

I[ 

C T m l(k, l) ml Pj(l) \ C Pj(k)" X CT ml<k,q) ml Pj(q) )] -0 

j=i q=i 

Dans cette equation, on a: T k ,i 

T k i 

Le systeme d* equation obtenu par 
8s 

= 0 avec k = la3etl = la4 

5T(k,l) 

se decompose en 3 sous-systemes independants 
5s 

= 0 



51(1,1) 
5s 

= 0 

5T(2,1) 
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OS 

o 

St<3,1) 

La resolution de ce systeme d* Equation est r§alisee par 
un algorithme connu par le calculateur de 1 1 installation 
selon 1' invention, qui ne sera pas expose plus en detail 
dans le cadre de la presente description, l'Homme du 
metier etant en mesure de mettre en oeuvre les solutions 
informatiques adaptees. 

Etape 3 : Mise en concordance — entre — Le. 

repere image et le repere camera. 

L*£tape suivante de la mise en concordance 
des r6f6rentiels consiste a calculer en temps r§el la 
matrice m2 Ti(t) de passage entre le repere Rm2 lie au 
patient , avec le repere image Rj.. 

• La transformation c T pr donnant la 
relation entre le repere R pr de la sonde (32) et le 
repere camera Rc est connu en temps reel par mesure 
inf rarouge . 

Les coordonnees d'un point P r P dans le 
repere R pr peuvent etre exprimees dans le rep&re R c par 
la relation : 

cp = c Tpr(t)P rp. 

La transformation c T rri 2 donnant la 
relation entre le repere fixe Rirt2 et le repere R c est 
connu en temps reel par mesure inf rarouge. Les 
coordonnees d'un point m2 P dans le repere Rm2 peuvent 
etre exprimees dans le repere R c par la relation : 

C P = c T ni 2(t) m2 P ou c T m 2(t) est determinee de 
mani6re analogue a c T m i(t) . 

Les coordonnees de I'extremite de la 
sonde (32) c P e xtr6mit6 sonde sont connues dans le repere 
Rpr par construction. 

Elles peuvent etre exprimees par la 

relation: 
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c P e xtremite sonde = c Tpr (t ) pr Pextremite sonde 
Elles peuvent done etre exprimees dans le 
repere R^par la relation : 

^Pextremite sonde = ^T C c T pr (t ) P^extremite sonde 
Etape 4 — : — Mise en concordance entre le 
reoere image ej; le repere outil . 

L 1 etape finale de la mise en concordance 
consiste a determiner la relation entre le repere R Q 
repere image Ri . 

On connalt pour cela : 

Etape 2 : la position de l'outil dans le 
repere des cameras par les transformation ml T 0 _(connue 
par construction) et c T m i (t ) (determinee en temps reel 
par mesure infrarouge) ; 

• Etape 3 : la correlation entre le repere 
fixe Rm2 et le repere image Ri par la transformation 
^Tntff determinee lors de la mise en correspondance . 

la position du repere R^ par rapport au 
repere fixe R c par la transformation m2 T C ( t ) qui est 
l f inverse de ^^(tjr determinee en temps reel par mesure 
infrarouge . 

On obtient done la transformation 
^ott) = i Tm2 m2 T c(t) CT ml(t) mlTo 

permettant d'afficher en temps reel la coupe 
correspondant au point d'interet. 

On obtient egalement la transformation 
° T i(t)/ inverse de i T 0 (t)_permettant d'asservir l'outil en 
temps reel par rapport a une cible definie dans la base 
de donn^es images . 

L 1 invention est decrite dans ce qui precede 
a titre d f exemple non limitatif. II est bien entendu que 
1 'Homme de Metier sera a m§me de proposer diverses 
variantes sans pour autant sortir du cadre de 
1 'invention. 



WO 95/07055 



20 



PCT/FR94/01050 



REVENPI CATIONS 

1 - Installation pour operation de 
microchirurgie assistee par ordinateur, du type 
comportant un support d'outils articule dont l'une des 
extremites est solidaire d ! un premier referentiel, ledit 
systeme comportant des moyens pour determiner les 
coordonnees de l*outil dans ledit premier referentiel, 
ainsi qu'une base de donnees Image dans laquelle sont 
enregistrees les images provenant d'un systeme 
d'imagerie dans le referentiel de 1 ' image Ri , 
1 1 installation comportant au moins deux capteurs 
solidaires du premier referentiel delivrant un signal 
electrique fonction de la position du referentiel du 
patient Rp dans le premier referentiel, et un 
calculateur pour la mise en correspondance du 
referentiel de l'outil R 0 avec le referentiel du patient 
Rp et le referentiel de 1' image Ri en fonction des 
informations provenant du capteur bidimensionnel, 
1 ' installation comportant un calculateur delivrant un 
signal pour la visualisation de la position de I'outil 
dans le referentiel de 1 ' image Ri sur un ecran de 
controle, et pour commander la position et les 
deplacements de l'outil en fonction de signaux de 
commande provenant d'un boitier de controle , caracterise 
en ce que ledit premier referentiel est un referentiel 
fixe independant du patient et du referentiel image et 
en ce que 1 1 installation comporte des moyens pour 
determiner les coordonnees de l'outil dans ledit 
referentiel fixe R c et des informations provenant de la 
base d 1 images, 



2 - Installation pour operation de 
microchirurgie assistee par ordinateur selon la 
revendication 1 caracterisee en ce que les capteurs 
bidimensionnels sont constitues par au moins deux 
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cameras d'acquisition solidaires du r£ferentiel fixe R c 
et disposees de fagon a ce que leur champs d 1 observation 
contiennent la zone d 1 intervention chirurgicale . 

3 - Installation pour operation de 
microchirurgie assist£e par ordinateur selon la 
revendication 1 ou selon la revendication 2 caracterisee 
en ce que les moyens pour determiner les coordonnfees de 
l'outil dans ledit r£ferentiel fixe R c sont constitues 
par au moins deux cameras d 1 acquisition solidaires du 
referent iel fixe R c et disposees de fagon a ce que leur 
champs d' observation contiennent I'espace de mobilite de 
l'outil. 

4 - Installation pour operation de 
microchirurgie assistee par ordinateur selon I'une 
quelconque des revendicat ions precedentes caracterisee 
en ce qu ! elle comporte un triedre geometriquement 
defini, presentant au moins quatre sources lumineuses 
ponctuelles non coplanaires solidaire de l'outil, 
l'espace de mobilite dudit triedre etant contenu dans 
les champs de vision des cameras d' acquisition . 

5 - Installation pour operation de 
microchirurgie assistee par ordinateur selon l'une 
quelconque des revendications precedentes caracterisee 
en ce qu'elle comporte un triedre geometriquement 
defini, presentant au moins quatre sources lumineuses 
ponctuelles non coplanaires solidaire de du patient, 
l'espace de mobilite dudit triedre etant contenu dans le 
champs de vision des cameras d 1 acquisition, pendant la 
totalite de la phase operatoire. 

6 - Installation pour operation de 
microchirurgie assist£e par ordinateur selon la 
revendication 1 caracterisee en ce qu'elle comporte en 
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outre une sonde (32) presentant une extremite de 
pointage (35) et au moins deux points lumineux (33 f 34) 
dont les positions par rapport a l 1 extremite de pointage 
(35) sont determinee geometriquement . 

7 - Procede de visualisation de la position 
d f un outil de microchurgie par rapport a une image 
preenregistree caracterise en ce qu'il comporte les 
etapes suivantes : 

- determination de la position de 1' outil 
dans le repere R c de la camera par les transformation 
ml To, connue par construction et c T m i(t)r determinee en 
temps reel par mesure optique ; 

- determination de la matrice i T m 2 de 
passage entre le repere fixe et le repere image Ri ; 

- determination de la position du repere 
Rm2 par rapport au repere fixe Rc par la transformation 
^Tcft) determinee en temps reel par mesure optique ; 

- calcul de la transformation 
i T o(t ) = i T m 2 ai2 Tc{t) c Tml(t) ml To 

permettant d'afficher en temps reel la coupe 
correspondant au point d'interet. 

8 - Procede d' asservissement d'un outil de 
microchurgie par rapport a une base de donnees images 
caracteris6 en ce qu'il comporte les Stapes suivantes : 

- determination de la position de l 1 outil 
dans le repere R c de la camera par les transformations 
ml T 0j _connue par construction et c T m i ( t ) , determinee en 
temps r£el par mesure optique ; 

- determination de la matrice i T m 2 de 
passage entre le repere fixe Rm2 et le repere image Ri ; 

determination de la position du repere 
Rm2 par rapport au repere fixe R c par la transformation 
in2 T C (t) determinee en temps r6el par mesure optique ; 

- calcul de la transformation 
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- calcul de la transformation °Ti(t), inverse 
de i T Q (t) _permettant d'asservir l'outil en temps reel par 
rapport a une cible definie dans la base de donnees 
images . 
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